随机过程（1）

笔记目录

• 概率论公理化

• Poisson 过程

• 马尔科夫链

• 离散鞅引论

参考资料

• 《应用随机过程》林元烈.

• 概率论

  • 事件与概率 (zmx0142857.github.io)

• Poisson 过程

  • L22.2 Definition of the Poisson Process - YouTube

• 马尔科夫链

  • 关于时齐马尔科夫链的吸收态的两个重要公式 - 知乎 (zhihu.com)

  • MATLAB马氏链分析工具_matlab asymptotics_leida_wt的博客-CSDN博客

  • 为什么喝醉的人可以走回家，喝醉的鸟却不能飞回家？ - 知乎 (zhihu.com)

  • 如何证明马尔科夫链一定会达到稳态？ - 知乎 (zhihu.com)

• 离散鞅引论

  • 概率论复习笔记(7)——Kolmogorov大数定律 - 知乎 (zhihu.com)

• 还没有参考, 但是先列出来

  • 方阵的n次幂求解汇总 - 知乎 (zhihu.com)

  • 应用随机过程|第3章 马尔科夫链 Markov Chains - 知乎 (zhihu.com)

  • 统计力学胎教 #1 随机游走和粒子扩散 - 知乎 (zhihu.com)

  • Probability.pdf (ustc.edu.cn)

  • 数学爱好者联盟 - 知乎 (zhihu.com)

• 马尔科夫决策过程

  • 2. 强化学习基础之马尔可夫决策过程哔哩哔哩bilibili

• 强化学习

  • 动手学强化学习 (boyuai.com)

  • Teaching - David Silver